CG交给AI做,下班回家陪老婆!Maxon官方为您揭秘如何将AI结合传统pipeline?
AI帮你做CG,你想过么?其实已经实现了!《西部世界》应该无人不知无人不晓了吧!精彩剧情+一流视效=高分剧集!
你看出哪个部分是用AI制作的么?谜底就在文中揭晓!
创意团队简介
动态设计公司Antibody的两位创始人——Patrick Clair作为创意总监,将AI机器学习神经网络(Neural Network)技术加入制作pipeline,与传统的影视制作手法相结合,运用了C4D,ZBrush,Octane渲染器等多个制作工具;Raoul Marks则带领设计团队,监管创意流程,从优化概念到打磨镜头,把握细节。
Patrick Clair
Antibody动态设计公司
联合创始人
创意总监
Raoul Marks
Antibody动态设计公司
联合创始人
总经理
Patrick和Raoul共同创立了Antibody动态设计工作室,主要制作电视剧片头,并已获得19次艾美奖提名。他们合作的主要客户包括HBO,Apple,LV,育碧等众多企业。Maxon官方也就《西部世界3》的片头制作对Patrick进行了专访。
Maxon官方采访页面
Antibody制作案例分享
AI部分解析
第三季片头的主题为“机器梦境(Machine Dreams)”,在片头的第11s加入了人工智能神经网络学习生成的“机器梦境”(你猜对了么?!),Patrick称本次片头的制作是“人与机器合作的成果”。
AI制作的部分极其简短,但不论是探寻人机关系的主题方面,还是强调前卫迷幻的视觉效果方面,这短暂的几秒都至关重要。
起意
Patrick:我一直对AI技术有浓厚兴趣,这也是我为什么接手《西部世界》项目的原因。在某次展会上,我遇到了Pinar Yanardag(人工智能科技公司AI Fiction的创始人&CEO),当时她向我介绍了他们公司正在研发和应用的技术:利用AI神经网络技术创作,比如设计服装,设计涂鸦等。《西部世界》第三季中的主角都离开了公园,所以我觉得利用AI做一段内容展现机器记忆是个不错的想法。
AI Fiction案例分享
1. AI结合服装设计
GAN算法通过学习数以千计的古董裙装后,设计出新的服装。服装设计师Agnes Cameron和麻省理工的毕业生们共同将这些设计做成实物。
2. AI结合涂鸦设计
GAN算法通过学习上千张来自世界各地的涂鸦图片,设计出新的涂鸦。艺术家IMAGINE和SOBEK将这些涂鸦绘制在剑桥Graffiti Alley的墙上。
(左:来自世界各地的涂鸦图片素材;右:AI设计的涂鸦图案)
实践
Patrick:AI研究员在神经网络中上传了170万张图像,这些图像均来自《西部世界》第一季和第二季,供神经网络学习。
之后利用算法研究出素材中不同的视觉模式,并且将相似的内容关联,生成了“梦境”。这是一个非常抽象的概念,就像幻觉一样。
最初生成的内容分辨率非常低,我们又利用另一套神经网络系统将生成的内容放大,满足剧集片头4K的分辨率要求。
尽管AI生成的部分在片头中只有几秒,但是我们非常喜欢这种怪诞和印象派的视觉效果。
润色
Patrick:我们找到了一些细胞分裂的影片片段,动画团队将“机器梦境”和细胞结合,细胞和细胞膜作为“机器梦境”的容器,让AI生成的内容在视觉上更加多面,有层次感。
接下来《西部世界》如果继续往下拍,我还想不断探索AI技术带来的新可能。
制作流程分享
灵感
Patrick:首先,《西部世界》一、二季的片头内容差不多,但是我们认为第三季非常有必要改动。第三季的内容不再是关乎牛仔世界,主角们回到现实世界开始找寻自由。基于这个大前提,我们将片头用三个元素来表示
鹰——鹰飞过风洞,再像伊卡洛斯*一般飞向太阳,燃烧殆尽。
*伊卡洛斯(希腊文:Ίκαρος英文名称:Icarus)是希腊神话中代达罗斯的儿子,与代达罗斯使用蜡和羽毛造的翼逃离克里特岛时,他因飞得太高双翼上的蜡遭太阳融化跌落水中丧生,被埋葬在一个海岛上。
蒲公英——花瓣随风飘摇,后组成一个超级智能的装置,机械地计算着主角们的命运。
两个人物角色——他们互相靠近,触碰时却发现他们只是彼此的倒影,展现难辨自我的挣扎感。
参考
Patrick:我们一般会首先尽可能多的找到关于西部世界经典的图像,还会赏析很多经典的雕像,研究人的Pose,研究艺术如何表达欲望、迷失和爱的主题。同时我们也会参考3D打印作品和工业机器人,甚至连生物研究领域的培养皿图像也不放过。
故事板
Patrick:画出粗稿后,我们会和团队沟通视觉内容。这个环节大家有3、4次讨论和改动,并敲定视觉风格。
建模
Patrick:人物和动物,以及其他生物的建模用的是ZBrush;机械臂的建模在C4D中完成。
动画&渲染
Patrick:动画制作初期我们更侧重于画面节奏,而非灯光,我们将白模动画和音乐剪辑确认节奏。确认之后使用GPU渲染器优化细节,渲染出片。渲染环节使用的是Octane渲染器。(文章图片源自网络,如有侵权请联系删除)
往期精彩